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Keberfungsian Butir Diferensial 


Analisis Butir 


Dampak Butir 
(Item Impact) 


Keberfungsian 
Butir Diferensial 
(DIF) 


Bias Butir 
(Aitem Bias) 


Dampak Negatif 
(Adverse Impact) 


Beberapa Terminologi 


Seperangkat teknik statistik untuk mempelajari atau mengungkap 
performansi aitem suatu alat ukur 


Sebuah kejadian yang menunjukkan bahwa individu dari kelompok berbeda 
memiliki probabilitas untuk mendapatkan jawaban benar atau menyetujui 
pernyataan dalam sebuah aitem. 


Perbedaan memang dikarenakan perbedaan kelompok berdasarkan atribut 
yang diukur. 


Sebuah kondisi ketika individu dari kelompok yang berbeda memiliki 
probabilitas berbeda dalam mendapatkan jawaban benar atau menyetujui 
pernyataan dalam sebuah aitem, setelah level atribut yang diukur 
dikondisikan setara. 


Bias aitem terjadi ketika individu dari satu kelompok cenderung untuk 
menjawab aitem dengan benar (atau menyetuji pernyataan dalam aitem) 
dibandingkan peserta individu dari kelompok lainnya, karena beberapa 
karakteristik dari aitem yang dipakai dalam mengukur atau situasi 
pengukuran yang tidak relevan dengan tujuan tes. 


DIF diperlukan, tetapi tidak cukup , untuk bias barang. 
Istilah yang dipakai untuk menggambarkan situasi dimana kelompok 


perbedaan hasil uji kinerja dalam seleksi ujian yang tidak proporsional atau 
keputusan terkait (misalnya , promosi). Ini bukan bukti untuk bias tes. 


Camilli and Shepard (1994): Clauser and Mazor (1998) 
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Perbedaan antar Konsep 


e Dampak aitem dan bias aitem memiliki perbedaan kelompok didasarkan pada 
karakteristik yang relevan atau tidak relevan dengan atribut yang diukur. 

e DIF mengharuskan anggota kelompok dicocokkan berdasarkan atribut yang 
relevan sebelum menentukan apakah anggota dari dua kelompok berbeda 
dalam hal probabilitas mendapatkan skor tinggi. 

e Dampak negatif hanya menjelaskan pengambilan keputusan yang tidak 
proporsional berdasarkan hasil tes. 


“DIF is a necessary, but not sufficient, condition for item bias” 


e Jika aitem terjangkit DIF maka dapat dikatakan bahwa aitem tersebut bebas 
dari bias dalam mengukur 

e Tetapi Jika aitem terjangkit DIF, belum tentu dikatakan bahwa aitem bias 
dalam mengukur 

e Hal ini dikarenakan aitem bias perlu didukung dengan beberapa bukti lain, 
misalnya analisis konten atau evaluasi empirik 
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NN ja 
Regresi Logistik 


Persamaan Regresi Linier 


° Y =a +X atau Y = b + 6X 
e Berlaku untuk Y yang bersifat kontinu 
Persamaan Regresi Logistik 


e Prinsipnya sama dengan regresi linier akan tetapi untuk variabel Y yang bersifat 
dikotomi (misalnya 0,1) 

e Agar berbentuk kontinum Y kemudian diwujudkan dalam probabilitas dan skala logit 
[P/(P-1)]. P adalah peluang untuk mendapatkan kode/skor 1. 


P 
P-1 


Ln( = pt AX P adalah kepanjangan P(Y=1) 
e P/(P-1) adalah odds ratio. Misalnya P adalah probabilitas bahwa kecelakaan akan 
terjadi, maka odds terjadinya kecelakaan adalah : 


P-—1 Odds 


Odds = Tp dapat juga difomurlasikan melalui Pan 


e Persamaan regresi logistik dapat juga diwujudkan dalam bentuk probabilitas 


exp| 89 + 6X 
Maa pe GE PN Ce 
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Regresi Logistik dan Teori Respons Aitem 


Teori Respons Aitem 


e Teori respons aitem menjelaskan bahwa hubungan antara atribut (trait/abilitas) 
Individu yang diukur mengikuti kurva ogive, yang diwujudkan dengan persamaan : 


— exp| «(0 = 8)| 
Tr epla(0—6)] 


Probability of Correct Response 


Ability (0) 


e Model ini memiliki kemiripan dengan regresi logistik. 


Wahyu Widhiarso | Fakultas Psikologi UGM 


Keberfungsian Butir Diferensial 


Dasar Keberfungsian Aitem Diferensial 


Aitem yang terjangkit DIF ditunjukkan dengan perbedaan probabilitas dalam mendapatkan 
skor tinggi. 


Probabilitas 


Level Trait 


Gambar di atas menunjukkan tiga garis yang mewakili kelompok. Untuk individu yang 
memiliki level trait/abilitas sebesar 0. Kelompok A memiliki peluang sekitar 0.80 untuk 
mendapatkan skor tinggi. Kelompok B sebesar 0.50 dan kelompok C sebesar 0.10. 


Dapat dikatakan bahwa butir ini terjangkit DIF karena memihak pada kelompok A 
dibanding dengan kelompok B dan C. 
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aw“ 
Deteksi DIF dengan Menggunakan Regresi Logistik 


Regresi logistik akan menggunakan: 


Y Respons aitem (0 dan 1) sebagai variabel dependen 
Misalnya : Variabel kelompok yang dikode dummy 
Gender 1—kelompok reference dan 2—kelompok fokal 
TOT Skor skala untuk tiap individu 


TOT“Gender [Interaksi antara skor skala dan kelompok 


Persamaan yang dihasilkan adalah: 
Y = bg +a TOT + b,Gender + bb TOT * Gender 


Y adalah proporsi individual untuk mendapatkan jawaban benar atau 
menyetujui pernyataan di dalam aitem, yang merupakan odd ratio, p/(p-1). 


Ln P; 
E= 


= by + b (tot) + b, (gender) + b, (tot * gender) 
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Keuntungan Penggunaan Regresi Logistik 


Keuntungan Umum 

1. Tidak perlu mengkategorikan variabel kriteria 

2. Dapat diterapkan pada model DIF seragam maupun non-seragam 

3. Dapat menggeneralisasikan hasil model regresi logistik untuk skor biner 
pada skor butir ordinal. 


Keuntungan Komparatif dibanding Teknik Mantel Haenzel 

1. Regresi logistik ordinal dapat dipakai untuk skor biner maupun ordinal 

2. Lebih mudah diterapkan 

3. Dapat menghasilkan ukuran efek yang dapat diaplikasikan untuk regresi 
logistik ordinal 
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Kita dapat menginterpretasikan regresi logistik sebagai regresi linear dari 
variabel prediktor yang tidak teramati (laten), bersifat kontinyu dan 
terdistribusi acak, disimbolkan dengan Y*. 


Persamaan yang dihasilkan adalah: 


Y = b) HD TOT + b,Gender. +b, TOT * Gender. + £; 


2 
g€ memiliki rerata O dan varians A 


Persamaan ini menjelaskan bahwa regresi logistik sesuai dengan teori laten, 
karena memenuhi asumsi bahwa variabel yang dilibatkan (i.e Y*) adalah 
variabel laten dan terdistribusi normal. 


Secara generik, regresi logistik juga dapat dijelaskan dengan persamaan berikut: 


o ab = &,; +b,.(X) 


PY >) 


LogiiPY < j)| = a; #b(X) 


j= 1,2, ... cœ-1, dimana c adalah jumlah kategori skala ordinal 


Model ini menghendaki parameter intersep (œj) yang terpisah untuk tiap 
probabilitas kumulatif. 
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A 
Contoh 
Logit|P(Y < j)] = bg + h TOT 4 b,Gender, + b, TOT * Gender, + €; 


| Persamaan Regresi : 
Logit(P)  —-3-0.2(Tot)-0.5(Gender) 


Garis Pria: 2 
Logit(P)  —-3--0.2(Tot)-0.5(1) k 

=-3+0.2(Tot)-0.5 2 
Garis Wanita: È 


Logit(P) =-3+0.2(Tot)-0.5(0) 
=-3+0.2(Tot) 
Kesimpulan : Butir terjangkit DIF 


Skor Total 
-- Pria — Wanita 
II Persamaan Regresi : 


Logit(P)  —-1.540.1(Tot)-0.02( Gender) 
Garis Pria: 


1) 


a 

Logit(P) =-1.5+0.1(Tot)-0.02(1) g 

=-1.5+0.1(Tot)-0.02 $ 
Garis Wanita: å 
Logit(P) =-1.5+0.1(Tot)-0.02(0) o 

2 1 540 1(Tot) 0 02 0 10 20 30 40 50 60 

e 5 TXA Skor Total 
Kesimpulan : Butir tidak terjangkit DIF , . 

-- Pria ——Wanita 
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Praktek 


Data 


Data diambil dari Zumbo 

http://www.educ.ubc.ca /faculty/zumbo/DIF/index.htm 
Kita akan mendeteksi 2 aitem dari skala yang berisi 20 aitem yang 
berbentuk Likert 

Setiap aitem memiliki rentang 4 alternatif pilihan respons, dengan skor aitem 
bergerak dari O hingga 3 

Jumlah subjek adalah 511 (249 wanita dan 262 pria) 
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Prosedur Analisis di SPSS 


Deteksi Aitem Skala Likert 


Unduh file berikut dan letakkan pada folder yang sama 
Dataset : http://www.educ.ubc.ca/faculty/zumbo/DIF /ordinal/multicategory.sav 


Syntax : http://www.educ.ubc.ca/faculty/zumbo/DIF/binary/running ologit.SPS 
Pendukung : http://www.educ.ubc.ca/faculty/zumbo/DIF/binary/ologit2.inc 
Modifikasi file syntax sesuai dengan aitem yang akan kita uji. Sayangnya 
program SPSS hanya bisa menguji satu persatu. 

Pada contoh di bawah ini, aitem yang kita uji adalah aitem 1 


compute item- itemi. 
compute total- scale. 


compute grp- group. 


Kita bisa menggantinya dengan aitem lain. 

Syntax ini harus sesuai dengan penamaan data kita. Kita hanya bisa 
mengganti nama TOTAL dan GRP sesuai dengan nama data kita. Misalnya 
Jika skor komposit di data kita bernama KOMPOSIT maka nama total kita 
ganti dengan KOMPOSIT 


compute komposit- scale. 
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oa Hm 
Membaca Hasil 


Analisis akan menghasilkan tiga jenis keluaran. Hal ini dikarenakan regresi dilakukan secara 
bertahap seperti halnya persamaan ini. 


Y = by + b Total + b,Group, + b,Total * Group, + £; 


Pada model pertama, yang masuk ke dalam persamaan regresi adalah TOTAL, dilanjutkan 
dengan GROUP dan terakhir interaksi TOTAL dengan GROUP. 


Deteksi DIF 


e Tahap 1 dihasilkan nilai kai-kuadrat: 
LR-statistic 
Chisgu. DF Prob. %-Reduct 
216.277 2.000 .000 .229 


e Tahap 3 dihasilkan nilai kai-kuadrat : 
LR-statistic 
Chisgu. DF Prob. %-Reduct 
217.230 3.000 .000 .230 


e Selisih kai-kuadrat kedua tahap adalah 0.953 dengan df=2. Setelah kita lihat tabel kai- 
kuadrat dengan df=2, p-0.05, kita dapatkan bahwa kai-tabel adalah 5.99. 

e Oleh karena kai-tabel»kai-hitung kita dapatkan kesimpulan HO diterima/Ha ditolak, 
alias tidak ada perbedaan signifikan. Artinya aitem1l tidak terjangkit DIF. 
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Ukuran Efek DIF 


e Tahap 1 dihasilkan R? sebesar 40.82 (0.4082) 
e Tahap 3 dihasilkan R? sebesar 41.02 (0.4102) 


e Dari perbandingan R? didapatkan bahwa selisih R2 adalah 0.002. Yang merupakan R? 
yang sangat kecil. 


Persamaan 
Model 1 (Y-total) 

Coeff.-—B Std.Err. B/Std.E. Prob. exp (B) exp (B“S) 
total “162128 1012551 12.917040 .000000 1.176011 4.510596 
Const.1 -2.248529 .172285 =13-051199 .000000 .105554 1.000000 
Const.2 -4.688960 .291588 -16.080794 .000000 .009196 1.000000 
Const.3 -6.406028 .416761 —15.370973 .000000 .001652 1.000000 
Model 2 (Y-total-group) 

Coeff.-—B Std.Err. B/Std.E. Prob. exp (B) exp (B“S) 
total “161825 .012570 12.873767 .000000 1.175654 4.497902 
grp -.071827 .204267 -.351634 -725113 .930692 .964701 
Const.1 -2.136904 “359917 -5.937208 .000000 .118020 1.000000 
Const.2 -4.580303 .423495 -10.815482 .000000 .010252 1.000000 
Const.3 -6.292269 .525638 =11 970730 .000000 .001851 1.000000 
Model 3 (Y=total+group+ total*group) 

Coeff.=B Std.Err. B/Std.E. Prob. exp (B) exp (B*S) 
total .130199 .034509 3.772884 .000161 1.139055 3.352662 
grp —. 334654 .337448 —.991719 “321334 “115586 .845830 
int1.1 .021050 .021624 .973455 -330327 1.021273 1.378518 
Const.1 -1.734318 .540650 -3.207839 .001337 .176521 1.000000 
Const.2 -4.170979 .588720 -7.084826 .000000 .015437 1.000000 
Const.3 257914312 .648298 -9.122823 .000000 .002701 1.000000 
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Grafik Masing-Masing Kategori/Opsi Respons 


Probabilitas 


Probabilitas 
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A 
Analisis Melalui Program Lain (SAS) 


PROC LOGISTIC 


/* Full Model “/ 

proc logistic data = "D: Data Learning|ZUMBO|multicategory" desc; 
model itemi- total group total“group /rsguare: 

run, 

/“ Reduce Model (1) “/ 

proc logistic data = "D: Data Learning|ZUMBO|multicategory" desc; 
model itemi- total group /rsguare, 

run; 

/“ Reduce Model (2) */ 

proc logistic data = "D:\Data Learning\ZUMBO\multicategory" desc; 
model itemi- total /rsquare; 


run; 
OUTPUT 

-2 Log L 

Model 1 : 727.728 
Model 2 : 727.851 
Full Model : 726.775 


Uji DIF uniform : 


AG? = —2|Ln(Model,) — Ln(Model py) 
= 727.728 — 726.775 
= 0.953 
Nilai yang dihasilkan dibandingkan dengan kai-kuadrat tabel (df=1;p=0.05) yaitu 3.85. 


Karena 0.953 > 3.85, maka disimpulkan bahwa aitem 1 tidak terjangkit DIF. 
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(0) 10 20 30 40 


tota 
Sx k*k ee 


Antara Kelompok 1 (Simbol *) dan Kelompok 2 (Simbol O), tidak didapatkan 
perbedaan garis yang mencolok. 


Kesimpulan : Butir tidak terjangkit DIF 
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D ip 


